This Page Is Inserted by IFW Operations 
and is not a part of the Official Record 

BEST AVAILABLE IMAGES 



Defective images within this document are accurate representations of 
the original documents submitted by the applicant. 

Defects in the images may include (but are not limited to): 



BLACK BORDERS 

TEXT CUT OFF AT TOP, BOTTOM OR SIDES 
FADED TEXT 
ILLEGIBLE TEXT 
SKEWED/SLANTED IMAGES 
COLORED PHOTOS 

BLACK OR VERY BLACK AND WHITE DARK PHOTOS 
GRAY SCALE DOCUMENTS 



IMAGES ARE BEST AVAILABLE COPY. 



As rescanning documents will not correct images, 
please do not report the images to the 
Image Problem Mailbox. 



@ BUNDESREPUBLIK ® Offenlegungsschrift 
DEUTSCHLAND @ DE 1 00 55 862 A 1 




DEUTSCHES 
PATENT- UND 
MARKENAMT 



@ Aktenzeichen: 
@ Anmeldetag: 
(g) Offenlegungstag: 



100 55 862.3 
10. 11.2000 
23. 5.2002 



@ Int.CI.'^: 

H04N5/33 

H 04 N 3/15 
H 04 N 1/19 
G 02 B 23/12 



CM 
iO 
00 

in 
in 

o 
o 



O 



(g) Anmelder: 


@ Erfinder: 


Zeiss Optronik GmbH, 73447 Oberkochen, DE 


Wiedmann, Wolfgang, 73457 Essingen, DE 




(§) Entgegenhaltungen: 




DE 197 15 983 CI 




EP 06 53 882 B1 




WO 90 09 076 A1 



Die folgenden Angaben sind den vom Anmelder eingereichten Unterlagen entnommen 

Prufungsantrag gem. § 44 PatG ist gestellt 

@ Verfahren zum Ausgleich von technologisch bedingten Inhomogenitaten in den Einzelelementen eines 

Detektors, derzur Bildaufnahme eingesetzt wird 
(§) Verfahren zur Aufnahme von Bildern insbesondere IR- 

Bilder mrttels eines Detektors mit mehreren Sensorele- 



■ Homogenltfltsprufung 
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menten, wobei jedem Sensorelement ein Offsetwert 
zur Angletchung der Charakteristiken der einzelnen Sen- 
soren zugeordnet ist. Die einzelnen IVIef^werte werden je- 
weils nach der Offsetkorrektur einer Homogenitatspru- 
fung unterzogen. Bei Vorliegen von mindestens zwei der 
Bedingungen a) bis c) wird der Offsetwert 0^, des jeweils 
uberpruften MeSwerts, inn folgenden mit PrufmeBwert 
Ppo bezeichnet, modifiziert. Diese Homogenitatsprufung 
unnfaSt die folgenden Schritte: 

a) Uberprufung, ob der Prufmeliwert P^q ein Maximal- 
wert des PrufmefSfeldes darstellt, 

b) Oberprufung, ob die der Betrag der Abweichung des 
PrufmeSwerts P^o von dem Mittelwert der MeSpunkte 
i>^des PrufmeSfeldes uber ein vorbestimmtes MaS von 
dem Mittelwert der Differenz der MeBpunkte des Pruf- 
meSfeldes abweicht, 

c) Oberprufung,^ der Betrag des PrufmeBwerts P^^ von 
dem Mittelwert P^der MeBpunkte P^i des PrufmeSfeldes 
grdQer ist a(s die maximale Differenz der MeBwerte des 
Prufmellfeldes. 
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BeschreibuDg 

[0001] Bei Bildaufhahmen mittels eines Detektors, der zur 
Bildaufaahme eine Mehrzahl von Sensorelementen umfaBt, 
tritt das Problem auf, daB die einzelnen Sensorelemente un- 
terschiedliches MeBverhalten zeigen. Bis zu 1% der Sensor- 
elemente weisen eine staric abweichende MeBwertcharakte- 
ristik auf. 

[0002] Fioblemadsch ist insbesondere, daB die von den 
Sensoren detektierten MeBwerte nicht nur zeitinvariant von- 
einander abweichen, sondem insbesondere auch in Abhan- 

gigkeit von der Zeit driften. 

[0003] Diese zeitliche Drift der von den einzelnen Senso- 
leii eiiiiittelteu MeDweite kanii duiLli Eiubleudeu eines Re- 



[0014] In erster Naherung werden die Detektorbilddaten 
Pn niit n = 1 . . . j, wobei j die Anzahl der Bildpunkte bzw. 
die Anzahl der vorliegenden Bilddaten ist, die durch die ein- 
zelnen Sensoren des Detektors detektiert worden sind, je- 

5 weils mit einem additiven Offset- Korrekturkoeffizienten On 
und mit einem multiplikativen Gain-Korrekturkoeffizienten 
Gn, also mit einer linearen Korrekturkurve versehen. Diese 
Korrekturkoef&zienten werden einmal mittels an zwei v^- 
schiedenen homogenen Referenzbilder ermittelt und be- 

10 rechnet und dienen als charakteristische Start- und Reset- 
Werte. Die so korrigierten Bilddaten werden in einem 
Bildspeicher abgelegt. Die derart modifizierten Bilddaten P^ 
werden permanent wahrend dem normalen Dauerbetrieb ei- 
ueiii Humugeiiitatstest uuterzogen, DuilIi diesen Il o moge- 

15 nitalstest wird uberpriift, ob jeweils der MeBwert Pno stark 
von den benachbart angeordneten Bilddaten abweicht. Stel- 
len die Bilddaten eines Bildpunktes eine Singularitat im 
Vergleich zu den Bilddaten benachbarter Bildpunkte dar, so 
spricht dies dafur, daB es sich um fehlerhafte Bilddaten ban- 

20 delt. 

[0015] Bei der lokalen Betrachtung der Bilddaten wird ein 
PriifoieBfeld einer vorbestinunten GroBe herangezogen. Die 
MeBwerte des PriiftneBfeldes werden mit Pni bezeichnet, 
wobei der Index i von 1 bis 8 lauft, wenn beispielsweise 

25 kann das PnifmeBfeld eine GroBe eines 3x3 Matrixfeldes 
aufweisen, wobei die zentrale Mitte ausgenommen ist, da es 
sich bei dem in der zentralen Mitte angeordneten Bildpunkt 
um den zu uberprufenden Bildpunkt Pqo handelt. Es kann 
auch vorgesehen sein, daB nur die von den in den Richtun- 

30 gen oben unten rechts und links angeordneten Sensoren ge- 
wonnenen Bilddaten fur die Oberpriifung der Homogenitat 
des PrufmeBwertes Pqo herangezogen werden, dann wurde 
der Index i nur von 1 bis 4 laufen. 

[0016] Sind die Homogenitatskriterien in bezug auf das 

35 Priiftnefifeld nicht erfuhlt, so wird der Offsetwert On, der 
dem Sensor zugeordnet ist, durch den der jeweilige Pruf- 
meBwert Pqo detektiert wurde, modifiziert. 
[0017] Anhand von Fig, 2 wird im folgenden die Homo- 
genitatspriifung naher beschrieben. Der Reihe nach werden 

40 die MeBwerte dem Homogenitatstest unterzogen. Der in der 
Priifung befindliche PriiftneBwert wird mit Pno bezeichnet, 
wobei n den jeweiligen Bildpunkt bzw. Sensor angibt, durch 
den die Bilddaten des jeweiligen Bildpunktes erzeugt wor- 
den sind. Somit erfolgt die Homogenitatspriifung fur alle 

45 Punkte Pio bis Pi44o> wenn der Detektor eine 12-12 Sensor- 
matrix umfaBt. Die MeBwerte Pqo werden zu Beginn der Ho- 
mogenitatsprufung aus dem Datenspeicher entnommen. 
[0018] Bei der im FluBdiagramm dargestellten Homoge- 
nitatspriifung wird zuerst uberpriift, ob es sich bei dem Pruf- 

50 meBwert um einen Extremwert in bezug auf das PrufmeB- 
feld handelt. Ist der PrufmeBwert Pno groBer als alle MeB- 
werte des PriifmeBfeldes Pni oder kleiner als alle MeBwerte 
Pni des PriifmeBfeldes, so wird mit der Homogenitatsprii- 
fung fortgefahren. Ist diese Bedingung nicht erfiillt, so wird 

55 der nachste MeBwert P(n+i)o der Bildfeldmatrix der Homo- 
genitatspriifung unterzogen. 

[0019] Handelt es sich bei dem PrufmeBwert Pno um einen 
Extr emw ert, so wird zunachst der Mittelwert der Diflferen- 
zen APni von benachbarten MeBwerten Poi des PriiftneBfel- 
60 des ermittelt. 

APni = IPni - Pna+i)l fUr i = 1 bis (x - 1) und mit 

APax=IPiix-Pnliruri = X. 

65 [0020] Weiterhin wird die maximale Differenz APn^max 
zwischen benachbarten MeBpunkten Poi des PriifmeBfeldes 
ermittelt. 

[0021] Im folgenden wird veiglichen, ob der PrUfmeBwert 



ferenzbildes bzw. einer Referenzwarmequelle in vorbe- 
stimmten Zeitabstanden korrigiert werden. Das heiBt der 
Detektor wird in vorbestimmten Zeitabstanden neu kali- 
briert. Nachteilig ist jedoch, daB zum einen eine Referenz- 
quelle bereitgestellt werden muB und zum anderen durch die 
Neukalibrienmg jeweils eine Zeitverzogerung bei der Bild- 
aufiiahme entsteht. 

[0004] Es sind bereits auch dynamische Korrekturverfah- 
ren, z. B. aus der DE 197 15 983 CI, die ohne Einblendung 
eines Referenzbildes bzw, einer Referenzwarmequelle aus- 
kommen, bekannt Problematisch ist bei diesen Verfahren 
jedoch, daB sich die Korrekturkoeffizienten an das mittels 
des Detektors momentan aufgenommen Bildes anpassen 
und somit bei einem schnellen Wechsel des aufzunehmen- 
den Panoramas in Erscheinung treten. Es ist dann einige Zeit 
erforderUch, bis sich die Korrekturkoeffizienten an das neue 
aufzunehmende Bild bzw. Panorama angepaBt haben. Er- 
strebenswert ist eine Korrektur, die unabhangig von dem 
momentan erfaBten Panorama ist. 

[0005] Der Eriindung liegt die Aufgabe zugrunde ein ein- 
faches selbsttatiges Korrekturverfahren zum Ausgleich von 
Inhomogenit^ten derEinzelelemente eines Detektors bereit- 
zustellen, wobei eine durch einen schnellen Bildwechsel be- 

dingte Verfalschung der Aufnahme verhindert wird. 
[0006] Weiterhin liegt der Erfindung die Aufgabe zu- 
grunde ein Verfahren bereitzustellen, daB moglichst einfach 
ist und somit, akzeptable Mehrkosten nicht iibersteigt. 
[0007] Die Aufgabe der Erfindung wird durch das im An- 
spruch 1 beschriebenem Verfahren gelost, 
[0008] Durch die MaBnahme die von den Einzelelementen 
ermittelten MeBwerte durch Heranziehen der benachbarten 
MeBwerte auf Homogenitat zu iiberpriifen, wobei sowohl 
die Ab weichung des PriifmeBwertes von dem Mittelwert der 
umliegenden MeBwerte, als auch die Abweichung des Priif- 
meBwertes im Vergleich zur maximalen Differenz zwischen 
den benachbarten MeBwerten des PriifmeBfeldes heranzu- 
ziehen und wobei weiterhin bei der Betrachtung zu beriick- 
sichtigen ist, ob es sich bei dem PrufmeBwert um einen Ex- 
tremwert handelt. 

[0009] Weitere vorteilhafte MaBnahmen sind in weiteren 
Unteranspruchen beschrieben. 

[0010] Anhand der Fig. 1 und 2 wird das erfindungsge- 
maBe Verfahren naher erlautert. Es zeigt: 
[0011] Fig, 1 Verfahren der Bildaufnahme; und 
[0012] Fig. 2 Darstellung der Homogenitatspriifung im 
' RuBdiagramm 

[0013] Anhand von Fig. 1 wird das prinzipielle Verfahren 
zum Betreiben von Kamerasystemen mit Rachensensoren, 
auch mit FPA (focal plane array) bezeichnet, beschrieben. 
Insbesondere bei Kamerasystemen mit FPA fiirden In&arot- 
bereich miissen aufgrund von Inhomogenitaten derlnfrarot- 
sensoren, die sowohl zeitinvariant als auch zeitvariant sind, 
Korrekturen zum Ausgleich dieser Inhomogenitaten vorge- 
nommen werden. 
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Pno Starker von dem Mittelwert P^i der MeBwert e des 
PruftneBfeldes abweicht, als die mittlere Differenz APaj be- 
nachbarter MeBwerte des PriifmeBfeldes mullipliziert mit 
einem Wichtungsfaktor K, wobei sich der Mittelwert wie 
folgt bestimmt: 

[0022] Handelt es sich bei dem PrufmeBfeld beispiels- 
weise urn eine 3x3 Matrix, so wird die mittlere Differenz 
APni benachbarter MeBwerte des PrufmeBfeldes wie folgt 
ermittelt: 



10 



APnl = IPnl-Pn2i 
APq3 = IPa3 - Pn4l 
APo5 = lP^-PJ 

APn7=IPn7-Pn8l 

mit dem PrufmeBfeld 



APn2=IPQ2-Pn3l 
APn4=IPn4-PD5l 

APn8=IPii8-Pnll 
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[0023] Damit eigibt sich der Mittelwert der Differenzen 

der benachbarten MeBwerte: 30 

[0024] 1st also die Differenz des PrufineBwertes zum Mit- 35 
telwert der MeBwerte des PrUfmeBfeldes grGBer oder gleich 
als ein Ge wicfa tungsfaktor K multipliziert mit der mitderen 
Differenz APni benachbarter MeBwerte P^i des PrufmeBfel- 
des und gilt weiterhin, daB der Betrag der Diflferenz_zwi- 
schen dem PriifmeBwert Pno zu dem Mittelwert der 40 
MeBwerte Pni des PrufmeBfeldes groBer als die maximal 
auftretende Differenz APn^^ benachbarter MeBwerte des 
PrufmeBfeld es ist, gilt also bei einem 3x3 PrufmeBfeld IPno 
- Pni I > k X APni mit i = 1-8, so wird der OflFsetkorrektur- 
wert On 45 

P 



wird, dabei umfaBt die Homogenitatsprufung, bei der 
benachbarte MeBpunkte eines PrufmeBfeldes herange- 
zogen werden, die folgenden Schritte: 

a) Oberprufung, ob der PriifmeBwert P^o ein Ma- 
ximalwert des PrufmeBfeldes darstellt 

b) Uberpriifung, ob die der Betrag der Abwei- 
chung des PriifmeBwert Pn© von dem Mittelwert 
der MeBpunkte Pni des PrtlftneBfeldes uber ein 
vorbestimmtes MaB von dem Mittelwert der Dif- 
ferenz der MeBpunkte des PriifmeBfeldes ab- 
weicht 

c) Uberpriifung, ob der Betrag des PriifmeBwert 
Pno von dem Mittelwert Pni des MeBpunkte Pni 

des PiufmeBfeldes giOBer ist als die maxiiiiale 

Differenz der MeBwerte des PriifmeBfeldes. 

2. Verfahren nach Anspruch 1 dadurch gekennzeich- 
net, daB das PriifmeBfeld die zum PriifmeBwert Pno be- 
nachbarten MeBpunkte umfaBt, wobei der PriifmeB- 
wert Pno nicht Bestandteil des PriifmeBfeldes ist. 

3. Verfahren nach Anspruch 2, dadurch gekennzeich- 
nete, daB das PriifmeBfeld ein 3 x 3 Matrixfeld ist 

4. Verfahren nach Anspruch 2, dadurch gekennzeich- 
net, daB das als PriifmeBfeld nur die vier mit kiirzester 
Distanz zum PriifmeBpunkt P^o angeordnete MeBwerte 
umfaBt. 

5. Verfahren nach einem mindestens einem der voran- 
gegangenen Anspriiche, dadurch gekennzeichnet, daB . 
den Sensoren jeweils ein multiplikativer Korrekturwert 
zum Ausgleich von unterschiedlichen Empfindlichkeit- 
charakteristiken der Sensoren zugeordnet ist 

6. Verfahren nach einem mindestens einem der voran- 
gegangenen Anspriiche, dadurch gekennzeichnet, daB 
die multiplikative Korrektur nach der Offsetkorrektur 
durchgefOhrt wird. 

7. Verfahren nach Anspruch 1, dadurch gekennzeich- 
net, daB der Mchtungsfaktor K in dem Bereich von 1 

bis 4 liegt. 

8. Verfahren nach einem mindestens einem der voran- 
gegangenen Anspriiche, dadurch gekennzeichnet, daB 
das vorbestimmte MaB von dem Mittelwert der Diffe- 
renzen zwischen den MeBpunkten des PriifmeBfeldes 
multipliziert mit einem Wichtungsfaktor abhangt 



Hierzu 2 Seite(n) Zeichnungen 



angepaBt, wobei I die GroBe der iterativen Anpassung dar- 50 
stellt und > 1 ist Der Gewichtungsfaktor K ist vorzugs- 
weise ein Wert zwischen 1 und 4. Werden die beiden Bedin- 
gungen nicht erfullt, so wird mit einer Homogenitatspriifung 
des nachsten Bildpunktes des Detektors der digitalen Infra- 
rotkamera fortgefahren. 55 



Patentanspriiche 

1 . Verfahren zur Aufnahme von Bildern insbesondere 
IR-Bilder mittels eines Detektors mit mehreren Sensor- 60 
elementen, wobei jedem Sensoreleraent ein Ofifeetwert 
On zur Angleichung der Charakteristiken der einzelne 
Sensoren zugeordnet ist, wobei jeweils die einzelne 
MeBwerte nach der Offsetkorrektur einer Homogeni- 
tatspriifung unterzogen werden, wobei bei Vorliegen 65 
von mindestens zwei der folgenden Bedingung der 
Offsetwert On des jeweils uberpriiften MeBwertes, im 
folgenden mit PriifmeBwert Pno bezeichnet, modifiziert 
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Homofen/tatsprufung 



wert Ppjo 
n= Mm dtr 11*^ fey matrix 
j, =1...]' j =Aogig^l dgr 

i ~ 



ir 



w©fe@f giit Pn 4 Pni fur die i 
i = Indices 



ik. 



[imme 

a) APnj = Df fferenz ^ befiachiairten 



A j, max = mm. Differ® nz zw. 
d=ts Pruffeldes 



Gilt: 

IPno-P^njl^ K-APnj ,nnit rn]- JPf)i 



i Plj^-Pflj f & A Prij ,mcax. 





^ Offsg^rfiikturwertes On 


On:= On - Pfi 


®- PFi I = Iteratiomschrit* 
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